<!DOCTYPE html>
<html>
<head>
  <meta charset="utf-8">
  
  
  <title>celery异步框架5.0 | Hexo</title>
  <meta name="viewport" content="width=device-width, initial-scale=1, shrink-to-fit=no">
  <meta name="description" content="celery简介Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度celery是一种即插即用的任务队列，它是一个异步任务调度工具，用户使用 Celery 产生任务，借用中间人来传递任务，任务执行单元从中间人那里消费任务。任务执行单元可以单机部署，也可以分布式部署，因此 Celery 是一个高可用的生产者消费者模型的异步任务队列。你可以将">
<meta property="og:type" content="article">
<meta property="og:title" content="celery异步框架5.0">
<meta property="og:url" content="https://mourning-soul.gitee.io/hexo/2021/01/30/celery%E5%BC%82%E6%AD%A5%E6%A1%86%E6%9E%B6(5.0)/index.html">
<meta property="og:site_name" content="Hexo">
<meta property="og:description" content="celery简介Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度celery是一种即插即用的任务队列，它是一个异步任务调度工具，用户使用 Celery 产生任务，借用中间人来传递任务，任务执行单元从中间人那里消费任务。任务执行单元可以单机部署，也可以分布式部署，因此 Celery 是一个高可用的生产者消费者模型的异步任务队列。你可以将">
<meta property="og:locale" content="en_US">
<meta property="article:published_time" content="2021-01-29T16:00:00.000Z">
<meta property="article:modified_time" content="2021-01-30T04:10:17.772Z">
<meta property="article:author" content="John Doe">
<meta property="article:tag" content="-blocker">
<meta name="twitter:card" content="summary">
  
    <link rel="alternate" href="/hexo/atom.xml" title="Hexo" type="application/atom+xml">
  
  
    <link rel="shortcut icon" href="/hexo/favicon.png">
  
  
    
<link rel="stylesheet" href="https://cdn.jsdelivr.net/npm/typeface-source-code-pro@0.0.71/index.min.css">

  
  
<link rel="stylesheet" href="/hexo/css/style.css">

  
    
<link rel="stylesheet" href="/hexo/fancybox/jquery.fancybox.min.css">

  
<meta name="generator" content="Hexo 5.3.0"></head>

<body>
  <div id="container">
    <div id="wrap">
      <header id="header">
  <div id="banner"></div>
  <div id="header-outer" class="outer">
    <div id="header-title" class="inner">
      <h1 id="logo-wrap">
        <a href="/hexo/" id="logo">Hexo</a>
      </h1>
      
    </div>
    <div id="header-inner" class="inner">
      <nav id="main-nav">
        <a id="main-nav-toggle" class="nav-icon"></a>
        
          <a class="main-nav-link" href="/hexo/">Home</a>
        
          <a class="main-nav-link" href="/hexo/archives">Archives</a>
        
      </nav>
      <nav id="sub-nav">
        
          <a id="nav-rss-link" class="nav-icon" href="/hexo/atom.xml" title="RSS Feed"></a>
        
        <a id="nav-search-btn" class="nav-icon" title="Search"></a>
      </nav>
      <div id="search-form-wrap">
        <form action="//google.com/search" method="get" accept-charset="UTF-8" class="search-form"><input type="search" name="q" class="search-form-input" placeholder="Search"><button type="submit" class="search-form-submit">&#xF002;</button><input type="hidden" name="sitesearch" value="https://mourning-soul.gitee.io/hexo"></form>
      </div>
    </div>
  </div>
</header>

      <div class="outer">
        <section id="main"><article id="post-celery异步框架(5.0)" class="h-entry article article-type-post" itemprop="blogPost" itemscope itemtype="https://schema.org/BlogPosting">
  <div class="article-meta">
    <a href="/hexo/2021/01/30/celery%E5%BC%82%E6%AD%A5%E6%A1%86%E6%9E%B6(5.0)/" class="article-date">
  <time class="dt-published" datetime="2021-01-29T16:00:00.000Z" itemprop="datePublished">2021-01-30</time>
</a>
    
  </div>
  <div class="article-inner">
    
    
      <header class="article-header">
        
  
    <h1 class="p-name article-title" itemprop="headline name">
      celery异步框架5.0
    </h1>
  

      </header>
    
    <div class="e-content article-entry" itemprop="articleBody">
      
        <h2 id="celery简介"><a href="#celery简介" class="headerlink" title="celery简介"></a>celery简介</h2><h3 id="Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度"><a href="#Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度" class="headerlink" title="Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度"></a>Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度</h3><h3 id="celery是一种即插即用的任务队列，它是一个异步任务调度工具，用户使用-Celery-产生任务，借用中间人来传递任务，任务执行单元从中间人那里消费任务。任务执行单元可以单机部署，也可以分布式部署，因此-Celery-是一个高可用的生产者消费者模型的异步任务队列。你可以将你的任务交给-Celery-处理，也可以让-Celery-自动按-crontab-那样去自动调度任务，然后去做其他事情，你可以随时查看任务执行的状态，也可以让-Celery-执行完成后自动把执行结果告诉你。"><a href="#celery是一种即插即用的任务队列，它是一个异步任务调度工具，用户使用-Celery-产生任务，借用中间人来传递任务，任务执行单元从中间人那里消费任务。任务执行单元可以单机部署，也可以分布式部署，因此-Celery-是一个高可用的生产者消费者模型的异步任务队列。你可以将你的任务交给-Celery-处理，也可以让-Celery-自动按-crontab-那样去自动调度任务，然后去做其他事情，你可以随时查看任务执行的状态，也可以让-Celery-执行完成后自动把执行结果告诉你。" class="headerlink" title="celery是一种即插即用的任务队列，它是一个异步任务调度工具，用户使用 Celery 产生任务，借用中间人来传递任务，任务执行单元从中间人那里消费任务。任务执行单元可以单机部署，也可以分布式部署，因此 Celery 是一个高可用的生产者消费者模型的异步任务队列。你可以将你的任务交给 Celery 处理，也可以让 Celery 自动按 crontab 那样去自动调度任务，然后去做其他事情，你可以随时查看任务执行的状态，也可以让 Celery 执行完成后自动把执行结果告诉你。"></a>celery是一种即插即用的<b>任务队列</b>，它是一个异步任务调度工具，用户使用 Celery 产生任务，借用中间人来传递任务，任务执行单元从中间人那里消费任务。任务执行单元可以单机部署，也可以分布式部署，因此 Celery 是一个高可用的生产者消费者模型的异步<b>任务队列</b>。你可以将你的任务交给 Celery 处理，也可以让 Celery 自动按 crontab 那样去自动调度任务，然后去做其他事情，你可以随时查看任务执行的状态，也可以让 Celery 执行完成后自动把执行结果告诉你。</h3><hr>
<br>

<h2 id="celery应用场景"><a href="#celery应用场景" class="headerlink" title="celery应用场景"></a>celery应用场景</h2><h3 id="celery适合异步处理任务，如发送短信、邮件、文件上传、图像处理等比较耗时的操作，可将其异步执行，用户不需要等待太多时间，提高用户体验。"><a href="#celery适合异步处理任务，如发送短信、邮件、文件上传、图像处理等比较耗时的操作，可将其异步执行，用户不需要等待太多时间，提高用户体验。" class="headerlink" title="celery适合异步处理任务，如发送短信、邮件、文件上传、图像处理等比较耗时的操作，可将其异步执行，用户不需要等待太多时间，提高用户体验。"></a>celery适合异步处理任务，如发送短信、邮件、文件上传、图像处理等比较耗时的操作，可将其异步执行，用户不需要等待太多时间，提高用户体验。</h3><hr>
<br>

<h2 id="celery架构"><a href="#celery架构" class="headerlink" title="celery架构"></a>celery架构</h2><h3 id="Celery的架构由三部分组成，消息中间件（message-broker），任务执行单元（worker）和任务执行结果存储（task-result-store）组成。"><a href="#Celery的架构由三部分组成，消息中间件（message-broker），任务执行单元（worker）和任务执行结果存储（task-result-store）组成。" class="headerlink" title="Celery的架构由三部分组成，消息中间件（message broker），任务执行单元（worker）和任务执行结果存储（task result store）组成。"></a>Celery的架构由三部分组成，消息中间件（message broker），任务执行单元（worker）和任务执行结果存储（task result store）组成。</h3><ul>
<li>消息中间件</li>
</ul>
<blockquote>
<p>Celery本身不提供消息服务，但是可以方便的和第三方提供的消息中间件集成。</p>
</blockquote>
<ul>
<li>任务执行单元</li>
</ul>
<blockquote>
<p>Task result store用来存储Worker执行的任务的结果，Celery支持以不同方式存储任务的结果</p>
</blockquote>
<hr>
<br>

<h2 id="celery作用"><a href="#celery作用" class="headerlink" title="celery作用"></a>celery作用</h2><ul>
<li>执行异步任务</li>
<li>执行延时任务</li>
<li>执行定时任务</li>
</ul>
<hr>
<br>

<h2 id="安装组件"><a href="#安装组件" class="headerlink" title="安装组件"></a>安装组件</h2><figure class="highlight plain"><table><tr><td class="gutter"><pre><span class="line">1</span><br></pre></td><td class="code"><pre><span class="line">pip install celery</span><br></pre></td></tr></table></figure>
<hr>
<br>

<h2 id="celery使用"><a href="#celery使用" class="headerlink" title="celery使用"></a>celery使用</h2><ul>
<li>导入celery模块 创建celery_tasks/main.py文件</li>
</ul>
<figure class="highlight plain"><table><tr><td class="gutter"><pre><span class="line">1</span><br></pre></td><td class="code"><pre><span class="line">from celery import Celery</span><br></pre></td></tr></table></figure>
<ul>
<li>创建celery实例对象</li>
</ul>
<figure class="highlight plain"><table><tr><td class="gutter"><pre><span class="line">1</span><br><span class="line">2</span><br><span class="line">3</span><br><span class="line">4</span><br><span class="line">5</span><br><span class="line">6</span><br></pre></td><td class="code"><pre><span class="line"># 创建celery实例</span><br><span class="line">app &#x3D; Celery(&#39;脚本名&#39;)</span><br><span class="line"># 加载配置文件  注意从celery文件夹开始</span><br><span class="line">app.config_from(&#39;celery配置文件位置&#39;)</span><br><span class="line"># 设置自动加载任务</span><br><span class="line">app.autodiscover_tasks([&#39;celery_tasks.任务名&#39;])</span><br></pre></td></tr></table></figure>
<ul>
<li>创建中间人broker</li>
</ul>
<h3 id="redis是一款功能完备的broker可选项"><a href="#redis是一款功能完备的broker可选项" class="headerlink" title="redis是一款功能完备的broker可选项"></a>redis是一款功能完备的broker可选项</h3><ul>
<li>创建任务</li>
</ul>
<figure class="highlight plain"><table><tr><td class="gutter"><pre><span class="line">1</span><br><span class="line">2</span><br><span class="line">3</span><br><span class="line">4</span><br><span class="line">5</span><br><span class="line">6</span><br><span class="line">7</span><br><span class="line">8</span><br><span class="line">9</span><br></pre></td><td class="code"><pre><span class="line">from libs.yuntongxun.sms import CCP</span><br><span class="line">from celery_tasks.main import app</span><br><span class="line"></span><br><span class="line">#可以设置name参数</span><br><span class="line">@app.task(name&#x3D;&#39;send_sms_code&#39;)   # 使用celery实例对象装饰@app.task()</span><br><span class="line">def send_sms_code(mobile,sms_code):</span><br><span class="line"></span><br><span class="line">    ccp &#x3D; CCP()</span><br><span class="line">    ccp.send_template_sms(mobile, [sms_code, 5], 1)</span><br></pre></td></tr></table></figure>
<ul>
<li>检测任务</li>
</ul>
<figure class="highlight plain"><table><tr><td class="gutter"><pre><span class="line">1</span><br></pre></td><td class="code"><pre><span class="line">app.autodiscover_tasks([&#39;celery_tasks.任务名&#39;])</span><br></pre></td></tr></table></figure>
<ul>
<li>创建worker</li>
</ul>
<figure class="highlight plain"><table><tr><td class="gutter"><pre><span class="line">1</span><br><span class="line">2</span><br><span class="line">3</span><br><span class="line">4</span><br><span class="line">5</span><br><span class="line">6</span><br><span class="line">7</span><br><span class="line">8</span><br><span class="line">9</span><br><span class="line">10</span><br><span class="line">11</span><br><span class="line">12</span><br><span class="line">13</span><br><span class="line">14</span><br><span class="line">15</span><br><span class="line">16</span><br><span class="line">17</span><br><span class="line">18</span><br></pre></td><td class="code"><pre><span class="line">from celery import Celery</span><br><span class="line"></span><br><span class="line">#进行Celery允许配置</span><br><span class="line"># 为celery使用django配置文件进行设置</span><br><span class="line">import os</span><br><span class="line">if not os.getenv(&#39;DJANGO_SETTINGS_MODULE&#39;):</span><br><span class="line">    os.environ[&#39;DJANGO_SETTINGS_MODULE&#39;] &#x3D; &#39;mall.settings&#39;</span><br><span class="line"></span><br><span class="line"></span><br><span class="line">#创建Celery对象</span><br><span class="line">#参数main 设置脚本名</span><br><span class="line">app &#x3D; Celery(&#39;celery_tasks&#39;)</span><br><span class="line"></span><br><span class="line">#加载配置文件</span><br><span class="line">app.config_from_object(&#39;celery_tasks.config&#39;)</span><br><span class="line"></span><br><span class="line">#自动加载任务</span><br><span class="line">app.autodiscover_tasks([&#39;celery_tasks.sms&#39;])</span><br></pre></td></tr></table></figure>
<ul>
<li>最后使用指令执行</li>
</ul>
<figure class="highlight plain"><table><tr><td class="gutter"><pre><span class="line">1</span><br></pre></td><td class="code"><pre><span class="line">celery -A celery对象的路径 worker -l info</span><br></pre></td></tr></table></figure>
      
    </div>
    <footer class="article-footer">
      <a data-url="https://mourning-soul.gitee.io/hexo/2021/01/30/celery%E5%BC%82%E6%AD%A5%E6%A1%86%E6%9E%B6(5.0)/" data-id="ckkt9opfp0001i4tw3qi21gyw" data-title="celery异步框架5.0" class="article-share-link">Share</a>
      
      
      
  <ul class="article-tag-list" itemprop="keywords"><li class="article-tag-list-item"><a class="article-tag-list-link" href="/hexo/tags/blocker/" rel="tag">-blocker</a></li></ul>

    </footer>
  </div>
  
    
<nav id="article-nav">
  
    <a href="/hexo/2021/01/31/axios%E5%B0%81%E8%A3%85/" id="article-nav-newer" class="article-nav-link-wrap">
      <strong class="article-nav-caption">Newer</strong>
      <div class="article-nav-title">
        
          axios封装
        
      </div>
    </a>
  
  
    <a href="/hexo/2021/01/29/%E4%B8%89%E6%96%B9%E6%94%AF%E4%BB%98/" id="article-nav-older" class="article-nav-link-wrap">
      <strong class="article-nav-caption">Older</strong>
      <div class="article-nav-title">三方支付</div>
    </a>
  
</nav>

  
</article>


</section>
        
          <aside id="sidebar">
  
    

  
    
  <div class="widget-wrap">
    <h3 class="widget-title">Tags</h3>
    <div class="widget">
      <ul class="tag-list" itemprop="keywords"><li class="tag-list-item"><a class="tag-list-link" href="/hexo/tags/blocker/" rel="tag">-blocker</a></li></ul>
    </div>
  </div>


  
    
  <div class="widget-wrap">
    <h3 class="widget-title">Tag Cloud</h3>
    <div class="widget tagcloud">
      <a href="/hexo/tags/blocker/" style="font-size: 10px;">-blocker</a>
    </div>
  </div>

  
    
  <div class="widget-wrap">
    <h3 class="widget-title">Archives</h3>
    <div class="widget">
      <ul class="archive-list"><li class="archive-list-item"><a class="archive-list-link" href="/hexo/archives/2021/02/">February 2021</a></li><li class="archive-list-item"><a class="archive-list-link" href="/hexo/archives/2021/01/">January 2021</a></li></ul>
    </div>
  </div>


  
    
  <div class="widget-wrap">
    <h3 class="widget-title">Recent Posts</h3>
    <div class="widget">
      <ul>
        
          <li>
            <a href="/hexo/2021/02/05/%E8%A7%86%E9%A2%91%E7%9B%B4%E6%92%AD/">视频直播</a>
          </li>
        
          <li>
            <a href="/hexo/2021/02/04/%E6%97%A0%E9%99%90%E6%9E%81%E5%88%86%E7%B1%BB%E8%87%AA%E5%85%B3%E8%81%94%E9%80%92%E5%BD%92/">无限极分类自关联递归</a>
          </li>
        
          <li>
            <a href="/hexo/2021/02/03/webshell/">webshell</a>
          </li>
        
          <li>
            <a href="/hexo/2021/02/02/redis%E9%94%AE%E7%A9%BA%E9%97%B4%E4%BA%8B%E4%BB%B6/">redis键空间事件</a>
          </li>
        
          <li>
            <a href="/hexo/2021/02/01/redis%E5%8F%91%E5%B8%83%E8%80%85%E8%AE%A2%E9%98%85%E8%80%85/">redis发布者订阅者</a>
          </li>
        
      </ul>
    </div>
  </div>

  
</aside>
        
      </div>
      <footer id="footer">
  
  <div class="outer">
    <div id="footer-info" class="inner">
      
      &copy; 2021 John Doe<br>
      Powered by <a href="https://hexo.io/" target="_blank">Hexo</a>
    </div>
  </div>
</footer>

    </div>
    <nav id="mobile-nav">
  
    <a href="/hexo/" class="mobile-nav-link">Home</a>
  
    <a href="/hexo/archives" class="mobile-nav-link">Archives</a>
  
</nav>
    


<script src="/hexo/js/jquery-3.4.1.min.js"></script>



  
<script src="/hexo/fancybox/jquery.fancybox.min.js"></script>




<script src="/hexo/js/script.js"></script>





  </div>
</body>
</html>